import tiktoken

encoding=tiktoken.get_encoding("cl100k_base")
encoding_model=tiktoken.encoding_for_model("gpt-4")

print(encoding.encode("你好呀"))
print(encoding_model.encode("你好呀"))

print(encoding.decode([57668, 53901, 17857, 222]))
print(encoding_model.decode([57668, 53901, 17857, 222]))